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Abstract 



The apparatus is used to recognize a hand position or gesture of a driver in a vehicle. The apparatus 
includes a device for converting the recognized hand (2) position into an operating command at a 
computing unit used to control the vehicle. The apparatus includes an illumination unit (4) which emits 
non-visible light into an observation field. A detector device detects non-visible light from the field and 
provides corresponding signals to the computer unit. 
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Die fofgenden Angaben sind den vom A nine I der eingereichten Unterlagen < 

® Vorrichtung in Fahrzeugen zum Erkennen einer Handstellung 
© Eine Vorrichtung in Fahrzeugen zum Erkennen einer 

Handstellung mil einer Einrichfung zum Umselzen der er- 

kannten Handstellung in oiner Arboitsanweisung an eine 

Recheneinheit, mit deren Hilfe eine Fahrzeugfunklion 

steuerbar ist, besitzt cine Beleuchtungseinrichtung, die 

nitht sichtbares Licht in ein BeobHchlunijsfeUI ausscndei, 

sowio oine Aufnahmeeinrichtung, die nicht sichtbares 

Licht aus dam Beobachtungsfcld aufnimmt und der Re- 
cheneinheit zuteitet. 
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Beschreibung 

[0001] Die Erfindung bezicht sich auf cine Vorrichiung 
mil den Merkmaien dcs Oberbcgriffs von Patent an spruch 1. 
[0002] Eine dcrartige Vorrichtung ist aus dcr $ 
DE 42 01 934 A bekannL Sie dieni dort zur Stcuerung eines 
Computers. Das Zicl dabci ist, die hicrfur ubliche Maus zu 
ersetzen bzw. zu erganzen. 

[0003] Bei dcr Anwendung dcr bekanntcn Vorrichtung in 
Kraftfahrzeugen Ireten besonderc Problcme auf. Dicse sind to 
bedingt durch die haufig wcchselnde Bcleuchtungsvcrhalt- 
nisse, die nicht nur in der Untcrscheidung zwischen Tag- 
und Nachlbetrieb licgen, sondem auch bci Tag durch untcr- 
schicdliche Einstrahlwinkcl und HclHgkcilsvcrhaltnissc zu 
untcrschiediichcn Kontrastwcrten dcr als virlucllcs Hinga- IS 
be medium dienenden Hand fuhren. 

(0004) Der Erfindung licgt die Aufgabe zugrundc. cine 
Vorrichtung der cingangs genannten Art zu schaffen, die fur 
den Einsatz in Fahrzeugcn besondcrs gut gecignct ist. 
(0005] Die Erfindung lost dicse Aufgabe mil den Merk- 20 
malcn des Paientanspruchs 1 . 

[0006] Durch die Verbindung dcr Bclcuchtungscinrich- 
tung und der Aufnahmccinrichlung auf der Basis des nicht 
sichtbaren Lichts wird cs moglich, die fur den Konlrast mil- 
be s Li nimenden Anteile dcs sichtbaren Lichts zu climiniercn. 25 
Bcim nichl sichtbaren Licht kann cs sich vorzugsvveisc urn 
Infrarotlicht handeln, das auch im Rahmcn dcr Thcrmogra- 
phie vcrwendel wird, uni ein Wamiehild eines Objekts zu 
gewinncn. Wahrend die ubliche Thermographic im wesent- 
tichen dadurch gckennzcichncl ist. daB dort das Warmehild 30 
mil Hilfe der vom Ohjekt ausgesandtcn Infrarot-Slrahlung 
aufgenommen wird, handelt cs sich bci dcr Erfindung urn 
die zusatzliche Beleuchrung des Objekts, hicr der menschli- 
chen Hand im Beleuchtungsfeld. mil Hilfe nichl sichtbaren 
Lichts. Dadurch wird die Vorrichiung unabhiingig von der .15 
individual unterschicdlichcn Ausscndung unsichlbarcn 
Lichts. Sie eigncn sich da schr besondcrs fur den vorgesche- 
nen Einsatzfall in Fahrzeugen. 

[0007] Vcrhcsscrungcn dcr Erfindung sind Gcgenstand 
dcr Patentanspruche 2 und 3. Durch die Verwcndung eines -w 
opiischen Fillers vor dcr Aufnahmccinrichtung werden Sior- 
antcilc durch speklrale Frcquenzen auBerhalb dcs interessic- 
renden Frcqucnzfensicrs ausgehlcndcl und dcr Konlrast er- 
hoht. Die Vcrwendung eines Filters iin Sirahlcngang hinler 
der Bclcuchiungseinricluung cnnoglichl cine besondcrs in- 45 
tensive Bcstrahlung des Bcleuchlungsfclds und verbessen 
damit besondcrs die opiischen Higcnschaften der gesamtcu 
Vorrichtung. 

{0008] Anhand der Zeichnung ist die Erfindung wciter er- 
lautcrt. Die einzige Figur zeigi schema! isch den konsirukti- 50 
ven Autbau der Vorrichtung. 

[0009] In cinem Beobachtungsfcld 1 tnncrhaJb cincs Fahr- 
zeugs soil die Stellung bzw. Gestik cincr nicnschlichcn 
Hand 2 crfaflt werden. Das Beobachtungsfcld befindct sich 
bcispielsweise im Rahmen der Miltelkonsole 3 des Fahr- 55 
zeugs, die angedeutet ist. 

[0010] Die Vorrichtung besteht im wcscnllichcn aus cincr 
Bclcuchtungseinrichlung 4, die Licht aussendct, femer ei- 
ncm Filter 5 im Sirahlengang hinter der Bclcuchiungsein- 
richlung, femer einer Aufnahmccinrichtung (Kamcra) 6 so- GO 
wic cinem Filler 7 im Bestrahlengang vor dcr Aufnahmccin- 
richlung 6. Die beiden Filter 5 und 7 sind lediglich fur nichl 
sich t bares Licht durchlassig. Dabei handelt es sich vor/.ugs- 
weise urn Tnfrarotlichi rnit einer definicrtcn Wcllcnliingc von 
800 nm bis 1200 nm. 65 
[0011] Mil Hilfe dcr in der Figur dargcstellten Vbrrichtung 
isi es moglich. die Hand 2 unler saniUichcn Bclcuchtungs- 
vcrhaltnissen mil infrarotem Lichi zu bcleuchten und die 
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Gestik mil Hilfe dcr Aufnahmeemrichtung 6 aufzunehmen 
und einer nicht dargestellten Recheneinhcil zur Analyse der 
jcwciligen Gestik sowie dem Umsctzen der Gestiken eine 
Anweisung an eine Rechcneinheit zuzuleiten. Die Hand ist 
bei Tageslicht und auch bei Dunkelheii jederzeii zu erken- 
ncn. Auch abrupte Beleuchtungs vernal in is se wie sie bei- 
spiels weise tagsUber bei Einfahrt in einen Tunnel auftreten, 
haben keinen Einfluss auf die Erkennbarkeii der Hand rnit 
Hilfe dcr Aufnahmeeinrichlung 6. 

[0012] Wahrend ublichcrweise die Suche nach eincm ent- 
sprcchenden Bedienclement schr stark die Aufmerksamkeit 
des Fahrcrs bindet und zeiiaufwendig ist und beispie Is weise 
die Blickabwcndung vorn Verkehrsgcschehen bei der Ein- 
stellung dcs Radios zu gcfahrlichen Situationen im Verkehr 
fiihren kann, wird es dem Benulzer ermoglicht, zusatzlich 
zu den beschriebencn Bcdicnmodalilalcn Fuhktionen via 
Gcstikeingabc, (urn den Erfordemissen der Fahraufgabe 
Rechnung zu tragen) und speziell via Einhandgesten, zu be- 
dicnen. 

[0013] Die vom Benulzer durchgefuhrte Gesten werden 
mi tie Is einer bildgcbenden Sensorik, vorzugs weise einer 
(oder mchrercr) CXJD Kamera(s) im visuellen, nahen infra- 
rotcn (NTR) oder femen infraroien Spektralbereich (FIR) er- 
faBl und miltels einem Bildverarbcitungssyslem nach der 
durchgefuhrten Handbewegung, der Handformen und dcr 
cingenommcnen Handpositioncn ausgewcrtet. Die Analyse 
diescr Gestik fuhrt zu cincr Systemrcaktion. Die Systemre- 
aktion wird den) Fahrer auf vcrschicdcne Weiscn zuriickge- 
mcldet (z. B. in Form einer Displaydarsiellung, einer 
Sprachausgahe, einer hapiischcn oder akustischen Riickmel- 
dung). (deaJerwcise wird der Erfassungshereich der bildgc- 
benden Sensorik optisch in Form einer hellen. projizierien 
Flache angegeben. 

[0014] Altcrnutiv konnen auch andcrc bildgebenden Vcr- 
fahren zur Gcstcncrfassung eingcseizt werden, z. B. ein La- 
serscanner. 

|0015 J Die Handbewegungen sollten Stcreotypen des Be- 
uutzcrs cutspreclien und konnen ggf. vom Gestenerfas- 
sungssysiern gelemt werden, urn die Erkennungssicherhcil 
zu erhohen. Es gcniigl, die entsprechendc Geste als Handbe- 
wegung und/oder Handform im "Sichtbereich" dcs Gestcn- 
crfassungssystcms auszufuhren. Die Suche nach eincm Be- 
dienclement enifalh. 

[001ft] Die Ausfiihrung von Gesten (bei entsprechend 
kleincm Vokuhular) ist parallel zu anderen Akiivitaten mog- 
lich und erfordcrt u. U. weniger Zeil (sowohl Vorbereiiung 
als auch Durch fiilirung) als gesprochene Sprache oder die 
Bcdicnung inittels Bedienelementen. Eine gestenbasierte 
Steuerung von Fahrzcugfunklioncn isi gerauschunabhiingig, 
helligkcitsunnbhangig und bei dcr Anwendung entsprcchen- 
der Verfahren robust gegen cxteme Beleuchtungseinflusse, 
wodurch sich dcr Ei nsaizbereich gerade in fahrrelevanien 
Situaiioncn und Bcdicn fallen mil Sprachausgabc bzw. Nut- 
zcrsprachc (e-mail vorlcsen. telefonicren etc.) erhohl. 

Paicntansprfiche 

1. Vorrichtung in Fahrzeugen zum Erkcnnen einer 
Handstellung, mit einer Einrichtung zum Umsetzcn der 
crkanntcn Handstellung in eine Arbeitsanweisung an 
cine Recheneinhcil, rnit dcren Hilfe eine Fahrzeug- 
funktion steuerbar ist, gekcnnzeichncl durch eine Be- 
leuchtungscinrichtung, die nicht sichtbares Licht in ein 
Bcobachtungsfeld aussendet, sowie durch eine Auf- 
nahmeeinrichlung, die nicht sichtbares Licht aus dem 
Beobachtungsfcld aufnimmt und der Recheneinhcil zu- 
Icitci. 

2. Vorrichiung nach Anspruch 1. dadurch gekenn- 
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zeichnet, daB cin optisches Filler im Strahlengang vor 
der Aufhahmccinrichiung angeordnet ist, das im wc- 
sendichen nux das unsichtbare Licht durchlaBt. 
3. Vorrichtung nach eincm der Ansprilche 1 odcr 2. go 
kennzeichnet durch ein weiteres optisches Filter im 
Strahlengang nach der Beleuchtungseinrichlung, das 
im wesentlichcn nur das unsichtbare Licht durchlaBt. 
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